工作 记忆 负 和 谷 对 反馈 加 工 过 程 的 影响 : KA 
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摘要 个 体 对 行为 后 反馈 结果 的 加 工 在 学 习 和 环境 适应 方面 有 重要 意义 , 工作 记忆 负荷 
(working memory load, WM load ) 如 何 影 响 反 馈 加 工 过 程 尚 不 清楚 。 采 用 双 任 务 范 式 ， 
设置 基线 、 低 WM load、 高 WM load 三 种 条 件 ， 结 合 ERP 技术 对 这 一 问题 进行 探究 。 发 
现 RewP (reward positivity ， 奖 赏 正 波 ) 对 效 价 敏感 ， 而 不 受 WM load 条 件 影响 ; Theta 
震荡 的 正 、 负 反馈 差异 波 在 高 WM load 条 件 下 比 在 低 WM load 条 件 下 小 。 结 果 支 持 等 级 


虽 化 学 习 - 前 扣 带 回 理论 ( HRL- ACC, hierarchical reinforcement learning theory of 


on 


anterior cingulate cortex ) 对 于 RewP 和 theta 震荡 的 观点 : RewP 反映 了 反馈 效 价 评估 功 
fE, theta 震荡 反映 了 认 知 控制 功能 ， 并 且 WM load 选择 性 影响 了 ACC 的 认 知 控制 功能 而 
不 是 反馈 效 价 评估 功能 。 

关键 词 工作 记忆 负荷 (WM load), Kir, 奖赏 正 波 ( RewP ) ,theta 震荡 ， 前 扣 带 回 
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1 前 言 


在 日 常生 活 中 , 反馈 对 人 们 的 学 习 与 环境 适应 有 重要 影响 , 个 体 总 是 趋向 于 在 积极 的 反 
贵 后 保持 自己 的 既 有 行为 ,在 消极 的 反馈 后 调整 自己 原先 的 行为 , 依 此 习 得 知识 和 技能 ( Luft, 


2014) 。 等 级 强化 学 习 - 前 扣 带 回 理论 (hierarchical reinforcement learning theory of 


SE 


anterior cingulate cortex function, HRL- ACC theory ) (Holroyd & Yeung, 2011; Holroyd 
& Umemoto, 2016 ) 对 此 提出 了 详细 的 模型 。 另 一 个 显而易见 的 事实 是 ， 学 习 往 往 并 不 是 
某 一 行为 的 孤立 操作 , 而 是 需要 同时 进行 多 个 任务 , 例如 学 生 在 课 芝 上 需要 一 边 听 讲 一 边 记 
录 笔 记 。 与 单一 任务 相 比 ， 在 进行 多 项 任务 时 , 个体 对 认 知 资源 的 需求 增加 ， 工 作 记 忆 负 
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faj (working memory load, WM load ) 增加 ( Krigolson et al., 2012) 。 已 有 研究 发 现 ， 
在 执行 双 任 务 或 多 任务 操作 时 ,WM load 增加 会 对 原本 进行 的 心理 过 程 产生 干扰 ( Krigolson 
et al., 2015; White & Grant, 2017; 程 家 萍 等 , 2017 ) , 但 WM load 如 何 影响 反馈 加 工 尚 不 
清楚 。HRL- ACC 理论 (Holroyd & Umemoto, 2016 ) 虽然 提 及 WM load 对 反馈 加 工 与 学 
习 的 影响 ,但 是 缺乏 直接 证 据 。 本 研究 使 用 脑 电 技术 对 这 一 问题 进行 探究 。 

奖赏 正 波 (RewP, reward positivity ) ， 早 期 被 称 作 反馈 相关 负 波 (feedback related 
negativity, FRN ) ， 是 反馈 加 工 诱发 最 重要 的 ERP 成 分 。RewP 对 反馈 效 价 敏感 ， 正 反馈 
比 负 反 馈 诱发 更 正 的 正 波 。 该 成 分 出 现在 反馈 刺激 后 200~350 ms 范围 内 ， 最 大 波幅 分 布 
于 头皮 中 前 部 ， 偶 极 子 溯源 分 析 和 神经 影像 学 研究 认为 RewP 的 脑 内 发 生源 位 于 前 扣 带 回 
(anterior cingulate cortex, ACC ) 和 纹 状 体 附 近 ( Gehring & Willoughby, 2002; Glazer et 


al., 2018; Hajcak et al., 2006; Miltner et al., 1997; Sambrook & Goslin, 2015 ) 。 对 RewP 
所 反映 的 心理 功能 的 理解 经 历 了 一 个 转变 , 早期 认为 RewP 反映 了 负 反 馈 ( 如 金钱 损失 ) 加 
工 , 负 反馈 诱发 了 更 负 的 负 波 ( Gehring & Willoughby, 2002; Hajcak et al., 2006; Miltner et 
al., 1997; Yeung & Sanfey, 2004 ) ， 因 此 早期 称 作 FRN。 随 着 研究 的 深入 ， 人 研究 者 转向 认 
为 正 反 馈 ( 如 金钱 获得 ) 诱发 了 更 正 的 正 波 (Baker & Holroyd, 2011; Foti et al., 2011; 
Proudfit, 2015) ， 正 、 负 反馈 条 件 下 RewP 波幅 差异 反映 了 人 脑 对 奖赏 的 加 工 ， 而 不 是 对 
负 反馈 的 加 工 ， 因 此 Proudfit A (2015 ) 倡议 将 其 改名 为 RewP。 
Delta (< 3 Hz) 和 theta (4~7 Hz) 是 反馈 加 工 诱发 的 两 个 主要 震荡 成 分 ， 并 且 其 分 
别 对 金钱 获得 和 损失 敏感 ( Bernat et al., 2011; Cohen et al., 2007 ), 为 了 进一步 了 解 RewP 
以 及 delta 和 theta 震荡 与 正 反 馈 加 工 和 负 反 馈 加 工 的 关系 , Foti 等 人 (2015 ) 使 用 时 频 分 
析 (time- frequency analysis ) 对 反馈 加 工 诱发 脑 电 成 分 进行 分 离 ， 结 果 发 现 theta 震荡 在 
负 反 馈 后 显著 增强 ，delta 震荡 在 正 反 馈 后 显著 增强 ; 脑 内 源 定位 发 现 前 者 位 于 ACC, 后 者 
位 于 纹 状 体 。Foti 等 据 此 提出 折衷 性 观点 , 认为 RewP 是 对 负 反 馈 敏感 的 theta 活动 和 对 正 
反馈 敏感 的 delta 活动 的 复合 体 。 
关于 RewP 与 反馈 加 工 的 关系 ， 强 化 学 习 理 论 (RL, reinforcement learning theory ) 

(Holroyd & Coles, 2002 ) 提出 了 详细 的 假设 。 该 理论 早期 针对 FRN 提出 ,认为 FRN 反 
映 的 是 中 脑 多 巴 腕 系统 在 强化 学 习 过 程 中 产生 的 奖赏 预期 错误 信号 ( RPE, reward 
prediction error) 。 当 实际 反馈 优 于 预期 时 ， 多 巴 胺 释放 增加 ; 当 实际 反馈 比 预期 差 时 ， 
多 巴 胺 则 会 减少 。 该 信号 会 被 投射 到 ACC 中 用 以 进行 强化 学 习 ,， 并 调节 FRN 的 大 小 。 后 来 
Holroyd 等 人 改进 了 该 理论 ,把 ACC 在 目标 导向 行为 中 的 功能 分 为 行为 选择 和 行为 驱动 两 
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部 分 ， 并 把 RewP (虽然 由 FRN 改 为 RewP, 但 是 其 反映 效 价 评估 、 是 RPE 信和 号 的 本 质 不 


A ) 和 theta 震荡 ( 在 该 理论 中 称 作 frontal midline theta, FMT 都 纳入 其 中 , 称 之 HRL- ACC 


理论 (Holroyd & Umemoto, 2016; Holroyd & Yeung, 2011; Shahnazian et al., 2018 ) 。 

HRL- ACC 理论 认为 ，ACC 一 方面 接收 来 自 中 脑 多 巴 胺 系统 的 反馈 评估 信号 (RPE ) ， 以 学 
习 某 一 行为 或 任务 的 价值 , 据 此 选择 要 实施 的 行为 ; 另 一 方面 通过 对 其 他 脑 区 ( 背 外 侧 前 额 
叶 ， 腹 侧 纹 状 体 ) 的 控制 来 驱动 任务 执行 。HRL- ACC 理论 赋予 RewP fil theta 震荡 重要 意 
义 ， 认 为 RewP 是 RPE 信号 的 脑 电 指标 ， 作 用 于 ACC 的 输入 端 ; 而 theta 震荡 是 ACC 发 


出 控制 信号 的 脑 电 活动 ， 是 ACC 的 输出 端 信号 (Holroyd & Umemoto, 2016; Holroyd & 


Yeung, 2011) 。 

从 以 上 分 析 中 可 知 ， 目 前 的 研究 和 理论 还 需要 进一步 验证 。 首 先 ， 对 于 theta 震荡 ， 
HRL- ACC 理论 认为 其 反映 了 ACC 发 出 的 控制 信号 -HRL- ACC 理论 得 出 这 一 观点 的 重要 证 
据 是 theta 震荡 会 受 认 知 资源 ( 例如 工作 记忆 负荷 (WM load) 、 注 意 ) 的 影响 (Hsieh & 


Ranganath, 2014; Mitchell et al., 2008 ) ,尤其 是 在 需要 持续 认 知 控制 的 任务 中 (Holroyd 


& Umemoto, 2016 ) 。 但 是 在 反馈 加 工 过 程 中 , theta 震荡 是 否 受到 WM load 水 平 的 调节 ， 
还 缺乏 直接 证 据 。 其 次 ， 与 HRL- ACC 理论 不 同 ，Foti 等 人 (2015 ) 认为 theta 震荡 反映 
了 对 负 性 结果 的 加 工 , 没有 明确 说 明 其 是 否 受到 认 知 资源 的 影响 。 因此 , 本 研究 将 考查 WM 
load 对 反馈 加 工 诱发 的 theta 震荡 的 影响 , 验证 HRL- ACC 理论 关于 theta 震荡 的 观点 , 也 
可 以 验证 HRL- ACC 理论 与 Foti 等 人 (2015 ) 的 观点 哪个 更 合理 。 另 外 ， 反 馈 加 工 相关 的 
重要 成 分 RewP 及 其 所 反映 的 反馈 效 价 评估 过 程 是 否 受 到 WM load 的 影响 ,目前 的 研究 和 
理论 对 此 也 缺乏 关注 。 本 研究 将 分 析 WM load 对 RewP 的 影响 ， 探 究 这 一 问题 。 

除了 RewP 以 及 theta 和 delta 震荡 之 外 ，P3 和 LPP (late positive potential ) 也 是 
反馈 加 工 诱发 的 重要 脑 电 成 分 。P3 在 时 间 窗 口上 紧 随 RewP 出 现 ， 分 布 于 头皮 中 后 部 。P3 
是 一 个 多 源 性 脑 电 成 分 , 与 注意 资源 的 分 配 、 背 景 信息 的 整合 .工作 记忆 的 更 新 有 关 ( Glazer 
et al., 2018; Nieuwenhuis et al., 2005; Polich, 2007 )。 根 据 背 景 更 新 假设 (Donchin & Coles, 
1988 ) ， 如 果 刺 激 传 递 的 信息 与 已 有 的 心理 表征 不 一 致 ， 内 部 表征 就 会 得 到 更 新 ，P3 反映 
了 心理 表征 修正 时 的 大 脑 活动 。LPP 在 反馈 加 工 过 程 中 是 继 RewP、P3 之 后 出 现 的 ERP 成 
分 ， 始 于 反馈 后 500 或 600 ms， 延 续 至 1000 ms 左右 ， 其 头皮 分 布 与 P3 大 致 相同 。 相 对 
于 中 性 刺激 , LPP 在 正 性 或 负 性 刺激 后 波幅 增加 , 研究 认为 其 反映 了 人 脑 加 工 刺激 信息 时 持 
续 的 情感 动机 过 程 ( Hajcak et al., 2009; Huang & Yu, 2018; Langeslag & van Strien, 2013; 


Meadows et al., 2016 ) 。 


诸多 研究 观察 到 P3 和 LPP 在 正 、 负 反馈 后 有 着 不 同 的 偏转 及 波幅 变化 。 有 研究 发 现 正 
反馈 后 P3 波幅 大 于 负 反 馈 (Yang et al., 2018; Zhou et al., 2010 ) ， 认 为 其 代表 了 反馈 加 
工 中 注意 资源 投入 或 感情 价值 的 变化 。 有 研究 发 现 LPP 对 反馈 效 价 敏感 ， 相 对 于 负 反 馈 ， 
正 反馈 后 LPP 波幅 增加 (Broyd et al., 2012; Webb et al., 2017) ， 但 是 也 有 研究 发 现 负 反 
人 馈 后 LPP 波幅 增加 (Donaldson et al., 2016 ) 。LPP 的 研究 结果 之 所 以 有 不 同 之 处 ， 一 个 
重要 原因 是 实验 任务 的 不 同 ， 不 同 任务 本 身 的 WM load 不 同 ， 例 如 在 Webb 等 人 (2017) 
研究 中 , 被 试 需要 在 三 个 待 选项 中 猜测 哪 一 个 隐藏 了 奖赏 ( 绿色 小 球 ) , 并 同时 执行 一 项 绿 
色 小 球 数量 的 记忆 任务 ， 而 在 Donaldson 等 人 (2016 ) 研究 中 被 试 只 需 在 两 个 待 选项 中 猜 
测 奖赏 的 位 置 ， 显 然 前 者 对 被 试 的 WM load 挑战 更 大 。 本 研究 也 将 分 析 WM load 水 平 对 
反馈 加 工 中 P3 和 LPP 阶段 的 影响 。 

本 研究 采用 双 任 务 设计 ， 结 合 简 单 赌博 任务 和 工作 记忆 任务 ， 实 现 基线 、 低 WM load 
和 高 WM load 三 个 条 件 ， 考查 WM load 对 反馈 加 工 过程 的 影响 。 具 体会 分 析 WM load 对 
RewP、P3、LPP 成 分 ， 以 及 delta, theta 震荡 的 有 影响。 首先， 依据 HRL- ACC 理论 ， 本 研 
究 预 期 WM load 会 调节 theta 活动 ,尤其 会 调节 theta 活动 的 反馈 效 价 效 应 ,不 同 WM load 
条 件 下 theta 的 效 价 效应 会 有 所 不 同 ; 其 次 ， 由 于 P3 反映 了 反应 模式 的 更 新 、 反 馈 加 工 之 
后 行为 调整 的 过 程 ， 本 研究 预期 WM load 会 影响 P3 对 反馈 效 价 的 加 工 。 此 外 ，WM load 
是 否 会 影响 RewP、delta 震荡 以 及 LPP， 目 前 的 理论 和 研究 中 没有 明确 假设 ， 本 实验 也 将 
探究 这 个 问题 。 

2 方法 
2.1 被 试 

共有 成 年 被 试 25 人 参与 实验 ， 均 为 右 利 手 ， 视 力 或 矫正 视力 正常 ， 无 精神 疾病 史 或 头 
颅 外 伤 史 。 其 中 一 人 在 实验 中 滤波 带 通 设置 错误 , 未 记录 到 有 效 脑 电 数据 。 一 人 实验 中 口头 
报告 困倦 、 疫 惫 ， 未 能 认真 执行 实验 任务 。 排 除 两 人 后 ， 共 获得 有 效 被 试 23 名 (女性 13 
名 ) , 年龄 18~25 3 ( M= 20 + 1.4)。 被 试 在 实验 结束 后 会 得 到 相应 的 报酬 。 本 研究 已 通 
过 山东 师范 大 学 伦理 委员 会 审查 。 

2.2 实验 设计 与 程序 
实验 采用 双 任 务 范式 , 结合 工作 记忆 任务 和 简单 赌博 任务 。 通 过 简单 赌博 任务 实现 反馈 


”使 用 G*Power 3.1 推算 样本 量 。 其 中 ， 最 大 效应 值 设置 为 f= 0.4，a = 0.05， 重 复 测量 间 相 关系 数 为 r= 
0.5。 本 研究 为 2*3 被 试 内 设计 ， 政 组 数 为 1， 因素 水 平 为 6。 最 终 推算 出 样本 量 为 15 人 。 本 研究 获得 有 
效 被 试 数 23 人 ， 满 足 样本 量 要 求 。 


A 


ME, 通过 工作 记忆 任务 操纵 WM load 水 平 。 采用 2x3 被 试 内 设计 , 两 个 因素 为 WM load 
水 平 (基线 、 低 WM load、 高 WM load ) 和 反馈 效 价 ( 奖赏、 无 奖赏 ) 。 

工作 记忆 任务 参考 Han 等 人 (2017 ) 的 设计 , 如 图 1a 所 示 , 记忆 材料 由 4x4 方 格 ( 视 
fA: 2.9°x2.9°) 和 作为 记忆 项 的 黑色 方块 组 成 。 工 作 记忆 任务 包含 两 种 条 件 ， 低 WM load 
条 件 下 一 个 小 方块 随机 分 布 在 方 格 任 一 位 置 ， 高 WM load 条 件 下 三 个 小 方块 随机 分 布 在 方 
格 中 ,但 随机 前 提 是 三 个 小 方块 靠 在 一 起 。 如 图 1b 所 示 ， 工 作 记 忆 任 务 包括 记忆 阶段 和 探 
测 阶 段 ， 简 单 赌 博 任务 嵌 在 两 个 阶段 之 间 。 
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到 1 高 WM load 和 低 WM load 条 件 的 记忆 材料 举例 (1a)， 以 及 实验 流程 图 (1b)。 如 1b Stas, 实验 为 双 任 务 范式 , 简单 赌博 任 
FRETES Po 


实验 中 被 试 坐 在 一 间隔 音 、 光 线 适 宜 的 屏蔽 间 内 , 距 显 示 屏 100 cm。 实验 流程 如 图 1b 
所 示 ， 首 先 呈 现 500 ms 的 注视 点 ， 紧 接着 出 现 持续 1000 ms 的 方 格 ， 要 求 被 试 记 住 方 格 
图 片 中 黑色 小 方块 的 位 置 。 然 后 出 现 800 ms 的 空 屏 ， 随 后 出 现 两 张 空白 卡片 ,告知 被 试 如 
果 选 择 左 侧 卡 片 就 按 "F" 键 ， 如 果 选 择 右 侧 卡片 就 按 " 了 键 ， 要 求 被 试 在 3 s 内 做 出 选择 ， 如 
果 3 s 内 未 作出 选择 ， 则 会 出 现 “ 选 择 过 慢 " 的 文字 提示 。 选 择 完成 后 有 600~1000 ms 随机 
时 长 的 空 屏 ， 之 后 呈现 1000 ms 的 反馈 刺激 ， 视 角 均 为 2.3%x2.3"， 其 中 “Vv” 表示 本 试 次 说 
得 0.1 元 ,“x” 表 示 没 有 金钱 得 失 。 随 后 呈现 800 ms 的 空 屏 ， 再 次 出 现 方 格 图 ， 要 求 被 试 
判断 本 张 方 格 图 片 与 之 前 的 方 格 图 片 中 小 方块 位 置 是 否 相 同 ， 相 同 按 “F" 键 ,不 同 按 “了 键 ， 
要 求 1000 ms 之 内 做 出 判断 。 最 后 是 800 ms 空 屏 ， 为 试 次 间 间 隔 。 

除了 高 、 低 WM load 条 件 , 实验 中 还 有 一 个 只 有 简单 赌博 任务 的 基线 条 件 。 参考 White 
和 Grant (2017 ) 的 设计 ， 为 避免 基线 条 件 被 工作 记忆 条 件 污 染 ， 被 试 在 实验 中 总 是 先 执 
行 基线 条 件 , 基线 条 件 作为 一 个 block, 共 包 含 100 个 试 次 。 低 WM load 条 件 和 高 WM load 


条 件 各 有 2 个 block, 每 个 block 有 50 个 试 次 。 高 、 低 WM load 条 件 的 4 个 block 的 顺序 


在 不 同 被 试 间 进 行 平衡 。 
在 每 个 条 件 开 始 前 被 试 要 进行 不 低 于 15 个 试 次 的 练习 阶段 ,以 保证 被 试 明白 实验 流程 。 
由 于 反馈 比率 会 影响 反馈 相关 脑 电 成 分 ， 为 保证 正 、 负 反馈 概率 差异 不 显著 ， 比 例 都 接近 


50% ， 参 考 前 人 研究 (Hajcak et al., 2006; Huang & Yu, 2018; Langeslag & van Strien, 


2013; Shahnazian et al., 2018; Yeung & Sanfey, 2004 ) 实验 采用 伪 随 机 设计 。 正 反馈 与 负 
反馈 均 伪 随机 出 现 , 与 被 试 选择 的 卡片 无 关 。 但 为 了 保证 被 试 的 任务 动机 ,实验 中 告知 被 试 
待 选 卡片 间 存在 某 种 规律 ,并 鼓励 被 试探 索 规 律 , 尽 可 能 使 赌博 任务 中 的 收益 最 大 化 。 实 验 
结束 后 告知 被 试 实验 任务 是 伪 随 机 设计 以 及 实验 目的 。 
2.3 脑 电 记录 与 处 理 

实验 程序 使 用 E- Prime 2.0 (Psychology Software Tools, Inc., Sharpsburg, PA) 编 写 。 


EEG 使 用 Brain Products 公司 生产 的 64 导 脑 电 记 录 系 统 (Brain Products GmbH, Munich, 
Germany) 采 集 ， 配 套 电极 帽 基于 10- 20 系统 安放 电极 。 以 右 眼 眼眶 下 1.5 cm 电极 点 记录 
垂直 腿 电 (VEOG)， 以 左 眼 外 侧 1.5 cm 处 的 电极 记录 水 平 腿 电 (HEOG)， 同 时 记录 双 侧 乳 突 
M1、M2 数据 。 滤 波 带 通 为 0.016~70 HZ, A/D 采样 频率 为 1000 Hz/ 导 。 所 有 电极 以 FCz 
点 为 在 线 参考 ， 以 AFz 点 接地 ， 电 极 与 头皮 间 的 电阻 小 于 10 KO. 

使 用 Brain Vision Analyzer 2.1 软件 进行 离线 分 析 。 首 先 将 采样 率 降 为 500 Hz， 采 用 
双 侧 乳 突 平 均 参 考 。 以 0.1~30 Hz 进行 带 通 滤 波 ， 使 用 独立 成 分 分 析 校 正 眼 电 伪 迹 ， 同 时 
剔除 波幅 超过 +/- 80 pV 的 其 它 伪 迹 。 取 反馈 刺激 呈现 前 200 ms 至 反馈 刺激 后 800 ms 时 
间 徐 内 脑 电 印加 获得 ERP 成 分 ， 并 以 反馈 刺激 前 200 ms 为 基线 。 

本 研究 分 析 了 RewP、P3 和 LPP 三 个 ERP 成 分 。 通 过 脑 电 结果 的 人 工 识别 以 及 参考 前 
人 文献 确定 各 成 分 的 取 值 电极 点 和 时 间 窗 口 。 对 于 RewP, 分 别 从 Fz、FCz 和 Cz 三 点 ， 取 
反馈 刺激 后 210~290 ms 的 平均 波幅 (Glazer et al., 2018; Proudfit, 2015; Sambrook & 
Goslin 2015) ， 然 后 求 三 个 值 的 平均 数 作 为 RewP 的 波幅 。 对 于 P3， 分 别 从 Pz 和 POz 
两 点 ， 取 310~400 ms 时 间 窗 口内 的 平均 波幅 (Yang et al., 2018; Zhou et al., 2010) ， 然 
后 求 两 个 值 的 平均 数 作为 P3 的 波幅 ,对 于 LPP, 分 别 从 Cz、CPz、Pz 和 POz 四 点 , 取 500~750 
ms 时 间 窗 口内 平均 波幅 (Broyd et al., 2012; Donaldson et al., 2016 ) ， 然 后 求 四 个 值 的 
平均 数 作为 LPP 的 波幅 。 

时 频 分 析 参 考 Webb 等 人 (2017) 的 方法 , 在 Brain Vision Analyzer 2.1 中 选择 连续 
小 波 变换 (Continuous wavelet transformation, CWT) 。 与 时 域 分 析 类 似 ， 先 对 EEG 数 
据 进 行 时 间 段 划分 ， 为 避免 边缘 效应 (edge effects) ， 分 段 时 将 时 间 窗 口 进行 延伸 ， 采用 
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反馈 呈现 前 1000 ms 和 反馈 呈现 后 1500 ms 时 间 段 的 EEG 进行 复 Morlet 小 波 变换 ( Morlet 
参数 : c = 3.5 ) ， 基 于 对 数 尺度 将 0.5~20 Hz 范围 的 频率 分 为 30 步 (frequency steps) , 

同时 以 反馈 刺激 前 -500 ms 至 -300 ms 时 间 段 EEG 作为 基线 进行 校正 。 随 后 对 不 同 条 件 下 
数据 进行 又 加 ， 重 新 截取 反馈 刺激 前 200 ms 和 反馈 刺激 后 800 ms 时 间 段 为 分 析 窗 口 。 为 
获得 delta 和 theta 活动 功率 ， 提 取 中 心 频率 为 2.3 Hz ( 频谱 带宽 : 1.32 Hz) 和 中 心 频率 为 
5.6 Hz( 频谱 带宽 : 3.2 Hz ) 的 小 波 。 基于 结果 图 并 参考 前 人 研究 ( Bernat et al., 2011; Cohen 


et al., 2007 ) ，delta 成 分 分 析 时 间 窗 口 为 反馈 刺激 后 220~430 ms, M Cz 和 CPz 点 取 值 
并 求 平均 数 ，theta 成 分 分 析 时 间 窗 口 为 反馈 刺激 后 250~400 ms, M Fz 和 FCz 点 取 值 并 
2.4 数据 统计 与 分 析 

行为 层面 上 ， 对 工作 记忆 任务 中 不 同 水 平 下 的 按键 反应 时 与 判断 正确 率 进行 配对 样本 t 
检验 。ERP 数据 的 分 析 中 ， 对 RewP、P3 和 LPP 波幅 进行 3 (WM load At: 基线 、 低 、 
高 ) x2 (反馈 效 价 : 奖赏 、 无 奖 党 ) 两 因素 重复 测量 方差 分 析 。 

对 theta, delta 成 分 进 3 (WM load 条 件 : 基线 、 低 、 高 ) x2 ( 反馈 效 价 : 奖赏 、 无 
奖赏 ) 两 因素 重复 测量 方差 分 析 。 另 外 ， 由 于 theta 的 方差 分 析 结 果 发 现 WM load 条 件 和 
反馈 效 价 存在 交互 作用 ， 为 了 进一步 分 析 不 同 WM load 条 件 下 的 效 价 效 应 ， 将 负 反 馈 后 的 
theta 活动 减 去 正 反馈 后 的 theta 活动 得 到 theta 在 正 、 负 反馈 间 的 差 值 ， 对 该 差 值 进行 单 
因素 (WM load 条 件 : 基线 、 低 、 高 ) 重复 测量 方差 分 析 。 

使 用 SPSS 19.0 进行 数据 分 析 ， 对 不 符合 球形 假设 的 p 值 进行 Greenhouse- Geisser 
校正 。 另 外 ， 统 计 结果 报告 了 效果 量 ，t 检验 报告 了 qd， 其 中 qd = 0.2 时 ,效果 小 ; d= 0.5 
时 , 效果 中 ; d= 0.8 时 ， 效 果 大 。F 检 验 报告 了 呈 *， 其 中 中 < 0.06 时 ， 表 示 关 系 微弱 ; 0.06 
< nz< 0.14， 表 示 关 系 中 等 ;ns> 0.14， 表 示 关 系 较 强 。 

3 结 
3.1 行为 结果 

被 试 在 不 同 WM load 条 件 下 对 再 认 材 料 的 按键 反应 时 无 显著 差异 ,1+(22) = -0.13, p= 

0.902。 而 判断 正确 率 差异 显著 , 1(22) = 3.03, p = 0.006, Cohen’ d= 0.73, 95%Cl = [1.01%， 


5.39%], 相对 于 高 WM load 条 件 下 (90.48 + 4.94% ) , 低 WM load 条 件 下 的 正确 率 ( 93.69 
+ 3.62% ) 更 高 。 


3.2 ERP 结果 
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RewP 的 结果 如 图 2 所 示 ， 效 价 主 效应 显著 ，F(1, 22) = 46.31, p< 0.001, ns = 0.68, 
正 反馈 后 的 RewP 波 幅 (11.12+ 1.15 pV ) 比 负 反 馈 后 RewP 波幅 (6.76 + 0.93 pV ) 更正。 
其 它 主 效应 和 交互 效应 均 不 显著 ,ps> 0.100。 图 2 还 呈现 了 RewP 差异 波及 其 地 形 图 .RewP 
差异 波 由 每 个 WM load 条 件 下 的 正 反 馈 结果 减 去 负 反 馈 结果 获得 。RewP 差异 波 显 示 其 约 
为 210~290 ms 的 正成 分 ， 地 形 图 显示 其 主要 分 布 于 头皮 中 线 前 部 。 
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到 2 各 条 件 下 RewP 原始 波 和 差异 波 波形 图 (Fz，FCz 和 Cz 点) ， 以 及 RewP 差异 波 地 形 图 


如 图 3 所 示 ，P3 效 价 主 效应 显著 ，F(1, 22) = 21.65, p< 0.001, n, = 0.50， 正 反馈 后 
P3 波幅 (14.104 1.10 uV) 比 负 反 馈 后 P3 波幅 (11.46 + 1.06 uV) 更 正 。 其 他 主 效 应 或 
交互 效应 均 不 显著 ，ps> 0.397。 
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图 3 各 条 件 下 P3 波形 图 (Pz 和 POz 点 ) ， 以 及 P3 地 形 图 


如 图 4 所 示 ，LPP 结果 显示 WM load x 效 价 交 互 作用 边缘 显著 ，F(1, 22) = 2.58, p= 
0.088，ns = 0.11。 由 于 效应 量 达到 中 等 ， 进 一 步 做 简单 效应 检验 ， 显 示 仅 在 高 NM load 
条 件 下 正 、 负 效 价 间 存 在 差异 , 正 反 馈 后 LPP (7.13+0.86 uV ) 大 于 负 反 馈 后 LPP 

(5.94+ 0.73 HV ) 。 其 他 主 效应 或 交互 效应 均 不 显著 ,ps> 0.101。 
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3.3 时 频 分 析 结果 

如 图 5 Pras, Theta 震荡 结果 显示 WM load 主 效应 显著 ，F(1, 22) =3.45, p= 0.040, 
ne= 0.14, 用 Bonferroni 方法 做 事后 比较 发 现 theta 活动 在 高 WM load 条 件 (38.53 + 6.73 
UV? ) 和 基线 条 件 ( 47.86 + 7.57 pV? ) 差异 边缘 显 车，p = 0.084。 由 于 Bonferroni 方法 
比较 严格 ,又 采用 LSD 方法 做 事后 比较 , 发 现 theta 活动 在 高 WM load 条 件 比 基线 条 件 更 
小 ,p= 0.028。 

效 价 主 效应 显著 ，F(1, 22) = 17.88，p < 0.001, n2 P= 0.45， 负 反馈 后 的 theta 活动 
( 60.46+ 10.12 pV?) 显著 强 于 正 反 馈 后 theta 活动 (22.81 + 3.66 pV’) 。 

WM load 条 件 x 效 价 交互 作用 显著 ，K1, 22) = 4.33，p = 0.019，m= 0.16， 简 单 效 
应 检验 显示 在 各 个 WM load 条 件 下 效 价 间 差异 均 显著 ( ps< 0.004 )。 对 正 、 负 反馈 间 theta 
差 值 的 分 析 发 现 , WM load 主 效应 显著 , F(1, 22) = 4.33, p= 0.019, mi= 0.16。 低 WM load 
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条 件 下 theta 差 值 (43.10 + 8.74 pV?) 大 于 高 WM load 条 件 下 theta 差 值 (29.49 + 9.20 
uV?) , p= 0.032。 
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图 5 各 条 件 下 theta 活动 时 频 分 析 图 (Fz 和 FCz 点 ) 
如 图 6 PR, Delta 结果 显示 效 价 主 效应 显著 , FO, 22) = 14.97, p = 0.001, n= 0.39， 


正 反 馈 后 的 delta 活 动 ( 32.45+ 4.27 pV? ) 显 著 强 于 负 反 馈 后 delta 活动 ( 22.23 + 2.94 pV? )。 
其 他 主 效应 和 交互 效应 均 不 显著 ,ps> 0.172。 
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到 6 各 条 件 下 delta 活动 时 频 分 析 图 (Cz 和 CPz 点) 


4 讨论 

本 研究 结合 简单 赌博 任务 和 工作 记忆 任务 ， 探 讨 了 WM load 条 件 对 反馈 加 工 的 影响 。 
行为 层面 ， 在 工作 记忆 任务 中 ,不 同 WM load 条 件 下 再 认 阶 段 的 正确 率 差异 显著 ， 当 需要 
记忆 的 小 方块 数量 增加 时 正确 率 更 低 ， 表 明 对 WM load 条 件 的 操纵 是 有 效 的 。 

电 生 理 层 面 ， 首 先 ，RewP 再 现 了 效 价 效应 (Gehring & Willoughby, 2002; Miltner et 


al., 1997; Sambrook & Goslin, 2015 ) ， 相 对 于 负 反 馈 (无 奖赏 ) ， 正 反馈 (奖赏 ) 后 出 现 
了 更 大 的 正 向 偏转 。 没 有 发 现 WM load 对 RewP 的 影响 。 其 次 ， 时 频 分 析 得 到 了 反馈 加 工 
相关 的 theta 和 delta 震荡 ， 两 者 也 表现 出 与 前 人 研究 一 致 的 效 价 效应 (Foti et al., 2015; 
Stewart et al., 2019; Webb et al., 2017) : 负 反 馈 后 theta 活动 功率 比 正 反馈 后 增加 ， 正 
反馈 后 delta 活动 功率 比 负 反馈 后 增加 。 更 重要 的 是 ，WM load 变化 调节 了 theta 震荡 的 
效 价 效应 ， 较 之 于 低 WM load 条 件 ， 高 WM load 条 件 下 正 、 负 反馈 间 theta 震荡 的 差异 
减 小 。 此 外 ， 考 察 了 反馈 加 工 中 晚期 阶段 的 P3 和 LPP 成 分 。 其 中 P3 表现 出 效 价 效 应 ， 正 
反馈 比 负 反 馈 诱发 更 正 的 P3， 但 是 不 受 WM load 变化 的 影响 。LPP 的 效 价 和 WM load 水 
平 的 交互 作用 边缘 显著 ， 只 有 在 高 WM load 条 件 下 , 正 反馈 后 LPP 波幅 更 正 于 负 反 馈 后 的 
LPP 波幅 。 

RewP 对 反馈 效 价 敏感 , 正 反馈 诱发 更 正 的 RewP, 符合 目前 主流 研究 结果 ( Gehring & 


Willoughby, 2002; Glazer et al., 2018; Hajcak et al., 2006; Miltner et al., 1997; Sambrook 


& Goslin, 2015 ) ， 也 符合 HRL- ACC 理论 的 观点 ， 即 RewP 是 中 脑 多 巴 胺 系统 对 效 价 评估 
的 信号 。 男 外 ， 本 研究 发 现 RewP 对 WM load 不 敏感 ， 依 据 HRL- ACC 理论 ，RewP 是 作 
HF ACC 输入 端的 效 价 评估 信号 ， 本 实验 的 结果 说 明 WM load 对 作用 于 ACC 的 效 价 评估 
过 程 没 有 影响 。 

本 研究 发 现 delta F theta 震荡 分 别 对 正 反 馈 和 负 反 馈 敏 感 , 直观 上 看 该 结果 支持 Foti 
等 人 (2015 ) 的 观点 ，delta 和 theta 震荡 分 别 是 个 体 加 工 正 反馈 和 负 反 馈 的 脑 电 指标 。 并 
且 本 研究 中 只 在 theta 结果 中 出 现 了 WM load 与 效 价 的 交互 作用 ，WM load RA, 正 、 反 
诱发 的 theta 活动 差异 量 越 小 。 这 可 以 推测 在 对 正 、 负 反馈 的 评估 过 程 中 , 随 着 WM load 
增加 ， 负 反馈 的 加 工 遭 到 损害 ， 而 正 反馈 的 加 工 不 受 影响 。 但 这 种 解释 无 法 说 明 的 一 个 事实 
是 ， 为 什么 本 研究 中 WM load 对 RewP 没有 影响 。RewP 是 衡量 个 体 加 工 反馈 效 价 能 力 的 
有 效 指标 (Baker & Holroyd, 2011; Foti et al., 2011; Proudfit, 2015; Sambrook & Goslin, 


2015) ， 如 果 WM load 增加 时 负 反 馈 的 加 工 受到 损害 ，RewP 对 正 、 负 反馈 的 区 分 能 力 会 
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降低 ， 在 RewP 的 方差 分 析 中 会 出 现 WM load 与 效 价 的 交互 作用 。 本 研究 没有 发 现 此 交互 
作用 ， 不 文 持 theta 震荡 反映 负 反 馈 加 工 的 观点 。 

目前 文献 中 关于 RewP 的 研究 也 不 支持 Foti 等 人 (2015 ) 的 观点 。 如 前 言 第 二 段 所 述 ， 
反馈 加 工 的 ERP 研究 中 一 个 基本 结论 是 RewP 反映 了 奖赏 加 工 , 是 奖赏 敏感 性 指标 ( Baker 
& Holroyd, 2011; Foti et al., 2011; Proudfit, 2015) ， 而 没有 发 现 对 负 反 馈 敏 感 的 ERP 指 
标 ， 似 乎 人 脑 没 有 加 工 负 性 结果 。Oliveira A (2007 ) 认为 人 们 有 乐观 倾向 ,反应 后 倾向 
于 预期 获得 正 性 结果 。 反 馈 呈 现时 ,进行 的 是 奖赏 预期 与 反馈 是 否 匹 配 的 加 工 ， 而 不 是 奖赏 
或 损失 的 加 工 ， 因 此 研究 中 没有 发 现 对 负 反 馈 敏 感 的 ERP 成 分 。 人 脑 没 有 加 工 负 反馈 ， 这 
样 的 结论 也 优 证 theta 不 应 该 是 负 反 馈 加 工 相关 的 成 分 。 而 Delta 震荡 对 正 反 馈 敏感 ， 这 一 
点 目前 观点 比较 一 致 。 

WR Theta 震荡 不 是 对 负 反 馈 加 工 的 信号 , 其 反映 心理 功能 是 什么 呢 ? 这 可 以 从 RewP 
(或 者 说 是 FRN ) 的 预期 违背 相关 理论 中 得 到 启发 。 早 期 RewP 被 认为 是 负 向 成 分 FRN 
(Gehring & Willoughby, 2002; Hajcak et al., 2006; Miltner et al., 1997) ， 除 了 强化 学 习 

He (Holroyd & Coles, 2002 ) ， 还 有 预期 违背 相关 理论 对 此 成 分 做 出 解释 。 如 反应 - 结果 
预期 理论 ( predicted response- outcome model, PRO )( Alexander & Brown, 2010, 2011 ) 
认为 人 们 利用 反馈 逐渐 习 得 反应 与 结果 ( 反馈 ) 的 关系 , 反应 之 后 会 形成 对 结果 的 预期 ， 当 
结果 与 预期 违背 时 ， 就 会 诱发 FRN。 预 期 违背 假设 (expectation violation hypothesis ) 
( Oliveira et al., 2007 ) 观点 与 此 类 似 。 依 据 预 期 违背 相关 理论 ， 负 反馈 诱发 的 认 知 活动 不 
是 负 反馈 加 工本 身 , 而 是 预期 违背 加 工 。 该 理论 突出 负 反 馈 的 意义 ,， 认 为 正 反 馈 之 后 不 需要 
控制 , 负 反 馈 之 后 大 脑 会 分 配 注意 、 实施 控制 改善 行为 ( Alexander & Brown, 2010, 2011 )。 
虽然 目前 已 经 认为 FRN (RewP) 只 对 正 反 馈 敏 感 ， 预 期 违背 相关 理论 不 能 再 以 FRN 作为 
验证 的 指标 ,但 对 负 反 馈 敏 感 的 theta 震荡 恰巧 可 以 作为 替代 。 也 可 以 说 theta 震荡 反映 的 
是 预期 违背 之 后 大 脑 实 施 的 注意 分 配 和 认 知 控制 功能 ,这 一 方面 可 以 解决 预期 违背 相关 理论 
检验 指标 的 问题 ， 另 一 方面 也 支持 HRL- ACC 理论 关于 theta 震荡 的 假设 (Holroyd & 
Umemoto, 2016 ) 。 

HRL- ACC 理论 认为 theta 震荡 是 认 知 控制 信号 ,从 ACC 投射 到 腹 外 侧 前 额 叶 等 脑 区 实 
施行 为 驱动 (Holroyd & Umemoto, 2016; Holroyd & Yeung, 2011; Li et al., 2018) 。 
HRL- ACC 理论 这 个 观点 的 重要 依据 是 theta 震荡 对 认 知 资源 ( 例如 WM load ) 水 平 敏感 

(Hsieh & Ranganath, 2014; Mitchell et al., 2008) 。 但 是 在 反馈 加 工 过 程 中 ，theta 震荡 


是 否 受到 WM load 水 平 的 调节 ， 还 缺乏 证 据 。 本 人 研究 发 现 WM load 影响 theta 震荡 对 反 
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效 价 的 编码 , 高 WM load 条 件 下 正 、 负 反馈 之 间 的 theta 震荡 差异 波 相 比 于 低 WM load 
减 小 。 结 合 HRL- ACC 理论 可 以 解释 为 WM load 越 高 ，theta 震荡 编码 正 、 负 反馈 的 敏感 
PERR, ACC 依据 不 同 的 反馈 对 背 外 侧 前 人 额 叶 等 脑 区 发 出 控制 信号 的 能 力 越 低 。 

关于 P3， 实 验 中 只 观察 到 了 P3 的 效 价 效 应 ， 相 对 于 负 反 馈 ， 正 反馈 诱发 更 大 的 P3, 
这 与 前 人 研究 一 致 (Yang et al., 2018; Zhou et al., 2010) ， 并 未 观察 到 在 不 同 WM load 
条 件 下 P3 的 变化 。 以 往 许 多 研究 中 认为 P3 代表 了 认 知 或 注意 资源 分 配 ，P3 波幅 大 小 与 投 
入 的 认 知 资源 有 关 ( Glazer et al., 2018; Polich, 2007 ) 。 另 有 研究 者 从 强化 学 习 系 统 与 工 
作 记 忆 系 统 交互 作用 的 角度 论述 了 P3 代表 的 心理 意义 ( Ferdinand, 2019; Rodriguez et al., 
2018 ) 。Rodriguez A (2018 ) 认为 在 反馈 学 习 过 程 中 , 个体 需要 根据 实际 的 反馈 实时 
对 奖赏 预期 值 进行 更 新 , 这 一 能 力 部 分 依赖 于 工作 记忆 系统 。 然 而 本 研究 没有 发 现 WM load 
对 P3 的 影响 , 似乎 与 以 上 理论 不 符 。 一 个 可 能 的 解释 是 本 研究 采用 的 任务 为 简单 财 博 任务 ， 
没有 学 习 意 义 。 被 试 虽然 进行 了 反馈 效 价 加 工 和 认 知 控制 输出 , 但 是 无 法 进行 工作 记忆 更 新 
和 形成 有 效 的 规则 标准 ， 所 以 没有 发 现 P3 的 WM load 效应 。 

另外 ，LPP 结果 发 现 效 价 与 WM load 的 交互 作用 边缘 显著 ， 只 在 高 WM load 条 件 下 
观察 到 正 、 负 反馈 间 LPP 的 差异 显著 。 以 往 研究 认为 LPP 反映 了 反馈 加 工 晚期 动机 情感 过 
程 (Glazer et al., 2018) ， 高 WM load 下 LPP 的 效 价 效应 可 能 表明 其 情感 性 价值 的 增加 。 
已 有 研究 表明 在 执行 任务 时 , 认 知 努力 增加 了 随后 奖赏 的 价值 ( Hernandez Lallement et al., 
2014) ,类 似 的 在 高 WM load 条 件 下 被 试 的 努力 程度 更 高 ， 而 对 反馈 结果 赋予 了 额外 的 情 
感动 机 意义 , 因而 LPP 更 大 。 同 时 也 在 一 定 程 度 上 回答 了 为 何以 往 研 究 中正 、 负 反馈 后 LPP 
的 差异 有 时 能 观察 到 ， 有 时 观察 不 到 这 一 问题 (Broyd et al., 2012; Meadows et al., 2016; 
Webb et al., 2017) ， 实 验 任务 给 被 试 施加 的 WM load 无 疑 是 重要 因素 。 

综 上 ,本 研究 验证 和 丰富 了 HRL- ACC 理论 , 支持 RewP 反映 了 反馈 效 价 加 工 过程 ， 而 
theta 震荡 体现 了 认 知 控制 功能 的 观点 ， 并 且 发 现 WM load 的 变化 选择 性 影响 了 后 者 。 然 
而 ,本 研究 采用 的 是 简单 赌博 任务 , 没有 学 习 意 义 。 下 一 步 应 该 采用 有 学 习 意 义 的 任务 ,， 考 
查 HRL- ACC 理论 中 的 反馈 评估 过 程 与 认 知 控制 过 程 ， 以 及 WM load 在 其 中 起 到 的 作用 。 
另外 ， 本 研究 中 基线 条 件 的 设置 有 不 足 之 处 。 借 鉴 了 White A (2017) 的 研究 ,为 了 减 
少 污染 把 基线 条 件 单独 拿 出 来 , 高 、 低 WM load 条 件 blocks 随机 呈现 ， 而 基线 条 件 单独 呈 
现 。 可 能 正 是 这 样 的 设置 导致 基线 条 件 与 高 、 低 WM load 条 件 差 异 不 稳定 。 在 未 来 研究 中 
要 更 好 的 设计 WM load 条 件 中 的 基线 条 件 。 
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Feedback processing plays an important role in behavior modification and 
knowledge acquisition. Previous research has explored the neurophysiological basis 
and psychological functions of feedback processing and proposed corresponding 
theoretical models, but little is known about how working memory (WM) load affects 
feedback processing. Studies have reported electrophysiological indicators, such as 
the reward positivity (RewP) and the related theta and delta oscillations, the P3 and 
the late positive potential (LPP), during brain processing feedback. This study will 
further examine how WM load modulates these electrophysiological components and 
their corresponding cognitive functions. 

In the present study, we used a dual- task paradigm to investigate feedback 
processing under different WM load conditions. This study included 25 healthy college 
students and used a 3 (WM load: baseline vs. low WM load vs. high WM load) by 2 
(feedback valence: positive vs. negative) within- participant factorial design. During the 
experiment, participants were asked to perform a simple gambling task and a spatial 
memory task simultaneously, and the magnitude of the WM load included three 
conditions: baseline, low WM load and high WM load. The RewP generated in the early 
stage of feedback processing and the LPP generated in the late stage of feedback 
processing, as well as the delta and theta oscillations related to feedback evaluation, 
were analyzed. 

The behavioral results showed that the accuracy of the low WM load condition 
was significantly higher than that of the high WM load condition. The 
electrophysiological results showed that the amplitudes of the RewP were sensitive to 
feedback valence, with positive feedback evoking larger RewP than negative 
feedback, but the RewP was not affected by the WM load. There was no difference in 
the P3 amplitude under the different WM load conditions. For the LPP, there was a 
significant interaction between the WM load and feedback valence. Further analysis 
revealed that, in the high WM load condition, the LPP amplitude was larger for positive 
feedback than for negative feedback. The theta power differences between negative 
feedback and positive feedback were larger in the low WM load condition than in the 
high WM load condition. For delta oscillations, the power was increased after positive 
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feedback compared to after negative feedback, but there was no difference at 
different WM load levels. 

The RewP results indicate that the participants process feedback valence 
information well under all three WM load conditions in the experiment. The LPP results 
suggest that the participants assigned additional emotional motivation to the 
feedback outcome as a result of their cognitive efforts under high WM load conditions. 
The ERP results for the time domain dimension showed that the effect of the WM load 
on feedback processing was most noticeable in the later stages of feedback 
processing. Moreover, these observations support the argument that the RewP and 
theta power reflect distinct cognitive phenomena; namely, the RewP reflects the 
processing of feedback valence in the anterior cingulate cortex (ACC), whereas theta 
oscillations reflect the role of the ACC in cognitive control. The WM load selectively 
modulates the cognitive control process in the ACC. 

Key words WM load, feedback, reward positivity (RewP), theta oscillation, anterior 


cingulate cortex 
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